glitter makes SPARQL

Projet RECIT

Appel à projet de l’ENS de Lyon “Projets émergents” => 💰 20 000 euros sur 3 ans

Web sémantique, linked open data, web des données

© Camille Scheffler

Formalisation des Linked Open Data

exemple: URI correspondant au film “Marius et Jeannette” sur Wikidata

Package glitter: objectifs

🎯 Promouvoir l’usage (exploration, recueil, analyse) des données du web sémantique pour les chercheur·se·s et étudiant·e·s usagers de R, en:

• facilitant l’écriture des requêtes SPARQL
• facilitant l’envoi des requêtes
• favoriser l’analyse/valorisation ultérieure dans R

En tant que “Domain Specific Language” (DSL), glitter correspond à une syntaxe et des fonctions plus proches du tidyverse et base R que de SPARQL.

Linked Open Data: difficultés d’appropriation et de collecte

Exemple de requête simple

query='SELECT ?film ?filmLabel 
   WHERE { 
   ?film wdt:P31 wd:Q11424. 
   SERVICE wikibase:label{
      bd:serviceParam wikibase:language "[AUTO_LANGUAGE],en".}
   } 
   LIMIT 10' 
result=WikidataQueryServiceR::query_wikidata(query) 

tib <- spq_init() %>% 
spq_add("?film wdt:P31 wd:Q11424", .label="?film") %>%
spq_head(n=10) %>%
spq_perform()

Dimension de la requête?

Combien de films dans Wikidata:

tib <- spq_init() %>%                 # Initialise requête puis
  spq_add("?film wdt:P31 wd:Q11424",  # Ajoute motif "?film est une instance de film"
          .label="?film") %>%         # ... étiquette ?film puis
  spq_summarise(n_films=n()) %>%      # Résume en comptant le nombre de films puis
  spq_perform()                       # Envoie la requête

Données enrichies pour produire une carte

lf_2=spq_init() %>%                     # Initialise requête puis
  spq_add("?film wdt:P31 wd:Q11424",    # Ajoute motif "?film est une instance de film"
          .label="?film") %>%           # ... étiquette ?film puis
  spq_add("?film wdt:P840 ?loc",        # Ajoute motif "?film a pour localisation narrative ?loc
          .label="?loc") %>%            # ... étiquette ?loc puis
  spq_add("?loc wdt:P625 ?coords") %>%  # Ajoute les coordonnées de ?loc puis
  spq_add("?film wdt:P3383 ?image") %>% # Ajoute l'affiche du film 
  spq_add("?film wdt:P921 ?subject",    # Ajoute ?subject
          .label="?subject",            # et l'étiquette associée
          .required=FALSE) %>%          # si dispo
  spq_add("?film wdt:P577 ?date") %>%   # Ajoute ?date (la date de sortie) puis
  spq_mutate(year=year(date)) %>%       # Ajoute variable year qui correspond à l'année de ?date puis
  spq_select(-date) %>%                 # Retire date des variables renvoyées 
  spq_language("fr,en") %>%             # Etiquette quand demandé de préférence en français, à défaut en anglais puis
  spq_perform()                         # Envoie la requête

Cette table comprend 2428 lignes (films avec localisation narrative, coordonnées associées et affiche). Voici les premières:

lf_2_show

Carte mondiale des lieux de fiction

Package glitter: vue d’ensemble

Un package qui suit quelques principes du tidyverse…

• usage du pipe %>%
• fonctions à préfixe (ici spq_)
• vise à la facilité d’utilisation (décomposition en étapes élémentaires)
• évaluation tidy (référence directe aux noms de variables)
• attention accordée à la documentation (par exemple via des vignettes)

Package glitter: fonctions principales

Généralisation à l’usage d’autres endpoints

Exemple de requête sur le SPARQL endpoint de dbpedia:

tib <- spq_init() %>%
  spq_add("?person dbo:birthPlace ?place") %>% # ?personne est née à ?place
  spq_add("?person dbo:profession ?job") %>%   # ?personne a pour profession ?job
  spq_add("?job rdfs:label ?jobLabel") %>%     # ?job a pour étiquette ?jobLabel
  spq_filter(lang(jobLabel)=="en") %>%         # Filtre pour ne garder que les étiquettes en anglais
  spq_add("?place rdfs:label 'Lyon'@en") %>%   # ?place a pour étiquette 'Lyon' (en anglais)
  spq_head(10) %>%
  spq_perform("dbpedia")                       # Envoie sur le SPARQL endpoint de DBPEDIA

Utiliser les LOD pour recueillir et compléter des données

Exemples pratiques d’utilisation:

• 🌻 données botaniques => associer une photo et un nom vernaculaire à un nom d’espèce en latin
• 📜 corpus de communiqués de presse du Ministère de l’Ecologie => récupérer le nom du ministre, avec les dates de début et de fin de son mandat.
• 🏙️ lien entre grandes villes et plaines alluviales => récupérer les populations des grandes villes et leurs coordonnées, associer à une rivière
• 🌍 carte du monde basée sur un shapefile avec des codes pays => récupérer les noms de pays, le nom et les coordonnées de leur capitales

=> Richesse thématique pour (par exemple) la construction de jeux de données pédagogiques

Et maintenant?

Chantier en cours!

📣 Retours utilisateurs bienvenus

Package installable et modifiable ici https://github.com/lvaudor/glitter.

🧠 Cas d’usages: à vous de jouer!

🙏 Merci pour votre attention!